ChronoVision: Temporal Reasoning via Latent State Reconstruction
ChronoVision：通过潜在状态重建实现时序推理
🧭 多模态时序推理 · 潜在状态重建
University of Illinois Urbana-Champaign · PediaMed AI · University of Pennsylvania
通过重建潜在状态与强化学习对齐过程，增强多模态模型的时序推理能力
📌 工作参考价值（4 点）
- 潜在状态重建可作为一种辅助任务用于用户行为序列建模，预测未来购物意图的隐状态演进，辅助动态兴趣捕捉。
- ROI 注意力定位模块可迁移至搜索或推荐中，对用户行为序列的关键片段（如点击、加购）进行聚焦，增强模型可解释性。
- 强化学习后训练对齐中间过程的做法，可借鉴到多步推荐 Agent 的决策优化，通过奖励中间状态一致性提升策略稳定性。
- 将视频推理转化为严格图像排序任务的评估思路，可启发推荐系统中序列预测能力的评测设计，如评测下一次物品预测的时序逻辑一致性。